First Things First: Teaching LLM-Based Agents to Prioritize Must-Haves before Nice-to-Haves
先必备后可选:教 LLM Agent 区分需求优先级
🧭 Agent 需求优先级推理与强化学习 ★ 深度解读
Shanghai Jiao Tong University · ByteDance
构建 FTF-Bench 并推出 FTF-RL,显著提升多模态 Agent 在电商/预订/出行中区分必备与可选需求的能力
📌 工作参考价值(4 点)
- 在电商/预订/导购 Agent 中,让模型先输出结构化 <requirements> JSON(mandatory/optional 分列)再做推理,能显著减少把 nice-to-have 当 must-have 或漏掉硬性需求的问题;可直接改造现有 prompt 或 SFT 模板。
- RL 训练时,除了 answer accuracy,增加 requirement classification 的 Macro-F1 作为 reward,用 GRPO + rule-based verifiable reward 即可轻量微调多模态 Agent,不需要复杂 reward model,适合业务侧快速自建。
- 参考 FTF-BENCH 的 unanswerable 设置,在商品筛选/酒店预订/打车等场景中增加“无候选满足全部硬性条件”的拒答评估,强制模型输出 no-match,可降低实际交易中的错误推荐率。
- 论文发现:仅在需求优先级数据上训练,就能在 LogicVista/MathVision/InfoQA 等通用推理任务上获得提升,说明显式的 must-have/nice-to-have 拆解训练可以作为一种通用的 reasoning 能力增强手段。